from scrapy.cmdline import execute

# execute('scrapy crawl quotes -o quotes.json'.split())
# execute('scrapy crawl quotes'.split())
execute('scrapy crawl usepost'.split())
"""
scrapy框架
引擎 爬虫 调度器 下载器 管道
引擎从爬虫获取请求实例 再将请求实例送到调度器 调度器将请求示例处理成请求队列 引擎从调度器获取请求队列里的请求实例 然后推送给下载器
下载器在向浏览器发送请求获取数据 再将响应数据返回给引擎 引擎将响应数据推送给爬虫 
爬虫的parse方法将解析结果返回给引擎 引擎将解析结果推送给管道管道将解析结果保存到本地 若解析结果为深度请求则推送给调度器
"""